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摘 要 : [目的 /意义 ] 针对 科研 项 目 评审 专家 选取 工作 中 的 回避 问题 ,试图 提出 一 套 可 行 的 用 于 确定 回避 专家 的 模型 方 
法 ,避免 人 际 关系 对 评审 工作 的 干扰 ,保障 科研 评价 的 规范 性 和 公正 性 。| 方法/ 过程 | 首先 以 专家 与 申请 人 之 间 
的 论文 合作 关系 为 切入 点 ,以 合作 强度 、 合 作 作者 深度 、 方 向 匹配 度 和 评审 业绩 为 主要 指标 ;然后 采用 综合 权重 和 
修正 TOPSIS 法 对 各 指标 进行 分 析 , 构 建 面向 科研 项 目的 专家 回避 量化 模型 ;最 后 根据 规定 的 专家 组 成 员 数 量 , 考 
虑 年 龄 .机构 性别 等 分 布 情况 ,明确 应 该 回避 的 专家 。[ 结果 /结论 ] 经 检验 ,该 模型 在 给 出 回避 专家 名 单 时 ,可 
以 有 效 避 免 “ 唯 合作 论 ” 的 问题 ,回避 理由 充分 ,符合 科技 管理 部 的 专家 选取 要 求 ,能 够 为 专家 遗 选 工作 提供 一 定 


的 决策 支撑 。 
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同行 评议 是 目前 国际 学 术 界 通 行 的 学 术 水 准 评价 


于 学 科 交 流 日 益 频 繁 ,学 科研 究 方 向 越发 细 化 ,一 味 地 
根据 官方 规定 ,社会 关系 等 来 确定 回避 专家 ,可 能 会 将 
“小 同行 "专家 第 除 ,产生 “过 度 回避 ”问题 ,进而 不 得 


也, 也 是 科学 基金 六 选 创 新 项 目的 根本 机 制 , 经 常用 
天 得 研 项 目 .科研 机 构 ,职称 等 的 评审 场合 中 。 同 行 评 
议 秆 往 会 涉及 评审 专家 .被 评议 者 以 及 科学 管理 机 构 
3 湾 主 体 ,其 中 评审 专家 能 否 科学 公正 履 职 一 定 程度 
上 窗 影 响 同行 评议 的 质量 。 为 此 ,科研 管理 部 门 常会 
采 甫 回避 制度 ,将 与 基金 项 目 .被 评议 者 等 存在 利害 关 
系 的 评审 专家 筛选 出 来 ,主要 有 自行 回避 、 申 请 回避 和 和 
指令 回避 3 种 形式 ”。 由 于 专家 回避 制度 在 评价 工作 
中 的 重要 性 ,不 少 学 者 纷纷 对 其 展开 研究 ,研究 内 容 包 
括 细 化 回避 原则 回避 理由 ,提出 基于 SNA(social net- 
work analysis) 中 .概念 知识 网 "等 新 型 专家 筛选 方法 ， 
力图 从 回避 制度 的 理论 和 方法 层面 实现 扩充 和 创新 ， 
从 而 更 好 地 保证 学 术 评 价 的 公正 和 学 术 环境 的 清明 。 

这 些 研究 一 定 程度 上 促使 专家 回避 制度 愈 发 规范 
详尽 ,也 提升 了 其 在 评价 场合 中 的 公信 力 , 但 仍然 存在 
不 足 之 处 。 具 体 来 说 , 现 有 研究 多 从 宏观 层面 对 专家 
回避 制度 进行 理论 性 指导 ,针对 一 些 隐 性 社会 关系 ,部 
分 研究 未 能 深入 剖析 其 对 回避 制度 的 影响 ,也 很 少 就 
不 同 场景 下 的 专家 回避 问题 进行 区 别 研究 。 另 外 ,由 


不 加 入 不 熟悉 该 学 科 领 域 的 专家 来 凑 足 专家 组 人 数 ， 
如 此 反而 降低 了 同行 评议 的 专业 性 。 

鉴于 上 述 问 题 ,笔者 以 科研 项 目 评审 工作 中 的 专 
家 选取 为 研究 背景 ,试图 在 专家 初步 第 选 已 经 完成 的 
基础 上 ,从 评审 专家 的 论文 合作 关系 切入 ,综合 考虑 合 
作 强 度 .研究 方向 .评审 业绩 等 多 方面 因素 ,采用 修正 
TOPSIS (technique for order preference by similarity to an 
ideal solution ) 方 法 构建 了 一 个 专家 回避 的 量化 模型 。 
该 模型 能 够 辅助 科研 管理 部 门 更 好 地 把 握 回避 力度 ， 
合理 确定 出 回避 专家 的 人 选 ,从 而 优化 评审 专家 组 的 
人 员 结 构 ,保障 科研 评价 工作 的 客观 公正 。 


2 相关 工作 


2.1 专家 回避 的 政策 研究 

到 外 利用 “利益 冲突 ”( conflict of interest,COI) 来 
表示 回避 的 含义 ,为 了 降低 利益 冲突 对 科研 活动 的 影 
响 , 不 少 欧美 发 达 国 家 对 此 制定 了 指南 性 的 管理 政策 ， 
大 致 可 以 分 为 美国 模式 和 英国 模式 两 种 ”。 同 时 ,不 
少 学 者 围绕 学 术 机 构 和 期 刊 的 披露 政策 展开 学 术 讨 
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论 ,A. Nichols-Casebolt 等 ' 对 目前 关于 机 构 利 益 冲 突 
的 观点 进行 归纳 ,认为 学 术 机 构 须 依据 自身 利益 冲突 
的 特点 制定 解决 策略 ;为 了 使 COI 被 更 多 的 人 所 了 解 
和 重视 ,N. H. Kong!'"] .C. Johnson'’! .A. J. Epstein'’ 
等 学 者 将 COI 研究 具体 应 用 到 医疗 健康 行业 ,从 行业 
工作 者 角度 探讨 了 COI 的 性 质 、 影 响 及 管理 措施 ;J 
Silva 等 ' 则 以 编辑 为 研究 对 象 ,探讨 了 编辑 自身 的 关 
系 网 络 所 带 来 的 潜在 利益 冲突 对 其 出 版 决定 的 影响 ， 
认为 编辑 应 主动 对 自己 的 关系 网 、 职 位 以 及 履历 进行 
披露 。 

相 比 之 下 ,国内 关于 回避 政策 的 研究 起 步 较 晚 ， 


家 回避 问题 ,场景 细 化 程度 和 区 分 意识 不 高 。 因 此 , 笔 
者 试图 面向 科研 管理 机 构 ,设计 出 适用 于 科研 项 目 评 
审 场 合 下 的 专家 回避 量化 模型 , 它 将 通过 构建 以 合作 
强度 合作 作者 深度 方向 匹配 度 和 评审 业绩 为 主体 的 
专家 回避 参照 指标 ,全 面 衡量 专家 的 合作 关系 .专业 能 
力 和 个 人 素养 ,然后 以 综合 权重 和 修正 TOPSIS 法 计算 
出 每 位 专家 的 回避 值 ,回避 值 越 高 的 专家 理论 上 越 应 
该 回避 ;最 后 依据 科技 管理 部 门 发 布 的 专家 管理 文件 
中 的 年 龄 .所属 机 构 等 限制 要 求 稍 作 调 整 ,结合 所 给 的 
专家 组 成 员 名 额 ,客观 合理 地 明确 回避 专家 名 单 , 从 而 
确保 评审 过 程 的 公正 性 、 专 业 性 和 民主 性 ,推动 科研 评 


2001 年 颁布 的 4 科技 评估 规范 》 是 我 国 科技 评估 活动 
的 第 一 个 规范 性 指南 文件 , 它 明确 了 评估 过 程 中 的 回 
台大 员 类 型 ,为 现行 同行 评议 专家 回避 制度 的 出 现 葛 


ba) 


工作 的 进步 。 


3 研究 设计 


基础 。2003 年 发 布 的 《关于 改进 科学 技术 评价 
的 决定 》, 意 味 着 回避 制度 正式 出 现在 规定 中 ,要 
各 实行 回避 制度 与 专家 组 定期 轮换 制度 '""。《 国 


家 前 然 科 学 基金 条 例 》” 《国家 社会 科学 基金 管理 办 
法 证” 等 从 年 龄 ,所属 机 构 、 社 会 关系 科研 能 力 多 方 
硬 对 专家 回避 进行 了 具体 的 规定 。 


及 专家 回避 的 模型 研究 

中 由 于 国外 很 少 有 研究 涉及 专家 回避 模型 方面 ,此 
处 宣 点 讨论 国内 的 模型 研究 成 果 , 主 要 包括 理论 框架 
和 波 际 应 用 两 个 方面 。 在 理论 框架 层面 , 雷 雪 等 ”从 
党 及 关 系 的 抽取 和 挖掘 入 手 , 初 探 处 理 同行 评议 中 专 
家 阿 避 问题 的 计量 思路 ,并 据 此 设计 了 一 个 回避 评估 


模型 的 雏形 ,这 对 之 后 提出 更 为 具体 可 行 的 回避 计量 


【 


2 


模 古 具有 启示 作用 ; 潘 云 涛 等 % 和 王 贤 慧 等 "9 着 腿 于 
专家 的 社会 关系 ,根据 紧密 程度 对 关系 进行 赋值 ,并 根 
据 不 同 的 评审 要 求 设置 评审 阔 值 ,将 二 者 进行 比较 ,从 
而 确定 回避 专家 。 在 实际 应 用 方面 , 张 志 清 等 ”利用 
捷径 距离 .中 间 中 心 度 等 指标 量化 评审 专家 的 社会 网 
络 地 位 , 吻 除 权威 专家 和 “纽带 "专家 以 完成 回避 ,该 
研究 充分 考虑 了 社会 关系 对 专家 评审 活动 的 影响 ; 李 
江 等 "提出 社会 关联 值 算法 来 量化 师 生 关系 .共事 关 
系 和 合作 关系 ,根据 逻辑 值 的 情况 确定 专家 是 否 需要 
回避 ,并 借助 自主 构建 的 测试 数据 集 来 检验 模型 的 效 
果 。 

总 的 来 说 , 目前 关于 科研 项 目 评审 中 专家 回避 问 
题 的 管理 政策 仍 存在 回避 理由 不 详细 .过 于 依赖 专家 
自觉 性 等 问题 ,设计 的 一 些 专家 回避 模型 也 多 停留 在 
框架 层面 ,操作 细节 不 够 具体 ,增加 了 实际 使 用 的 难 
度 。 此 外 ,一 些 研究 也 未 阐明 是 研究 何 种 情景 下 的 专 


3.1 整体 框架 

本 文 的 研究 步骤 具体 如 下 :中 从 中 国 知 网 和 Web 
of Science 获取 专家 的 中 英文 合作 论文 ,归纳 出 合作 作 
者 , 据 此 判断 申请 者 与 专家 是 否 存 在 合作 关系 ;@ 基 于 
文献 调研 ,参考 前 人 就 同行 评议 专家 洲 选 所 提出 的 指 
标 体系 ,再 结合 本 文 的 研究 特点 ,以 合作 强度 、 合 作 作 
者 深度 .评审 业绩 和 方向 匹配 度 为 主要 指标 ,量化 科研 
项 目 评审 场合 下 的 专家 回避 问题 ;@ 采 用 组 合 权重 设 
置 各 指标 的 权重 ,以 减少 不 同属 性 重要 程度 的 影响 ,并 
将 各 指标 值 输入 基于 修正 TOPSIS 法 的 专家 回避 模型 
中 ,得 到 每 位 专家 的 理论 回避 值 ;@ 对 理论 回避 值 进行 
排序 ,综合 考虑 专家 的 年 龄 .所属 机 构 等 科技 管理 部 门 
的 要 求 ,得 到 应 该 回避 的 专家 名 单 。 以 论文 合作 关系 
为 视角 的 专家 回避 量化 模型 框架 和 流程 见 图 1。 
3.2 ”参照 指标 及 量化 方法 

由 上 述 研究 可 知 ,专家 回避 问题 多 是 从 社会 关系 、 
学 术 关 系 等 多 重 关系 进行 分 析 , 但 这 些 关 系 中 有 不 少 
较为 隐 星 ,难以 界定 ,所 以 真正 能 纳入 研究 讨论 的 是 那 
些 易于 抽取 和 评价 的 关系 ,比如 论文 合作 关系 。 但 如 
果 只 依据 论文 合作 关系 来 选择 回避 专家 ,会 产生 “ 过度 
回避 ”的 问题 ,对 于 一 些 偏 冷 门 的 研究 领域 甚至 会 出 现 
无 专家 可 选 的 情况 ,所 以 有 必要 再 考虑 其 他 角度 。 深 
人 调研 发 现 , 早 在 20 世纪 90 年 代 , 就 有 不 少 学 者 针对 
同行 评议 中 的 专家 遂 选 问题 ,联合 国家 自 科 基金 委 成 
员 提 出 了 一 系列 指标 ,可 以 概括 为 社会 属性 .道德 修 
养 .学术 水 平 .评审 业绩 科研 活跃 度 和 工作 态度 ,并 据 
此 对 专家 进行 综合 评估 ” 。 此 外 ,世界 主流 科研 机 
构 ( 中 国 科学 院 、 美 国标 准 与 技术 研究 院 等 ) 在 选择 专 
家 时 ,也 常 以 学 术 能 力 、 评 审 经 历 、 利 益 关 系 等 为 依 
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图 1 专家 回避 量化 模型 流程 


全 。 基 于 此 ,笔者 决定 以 论文 合作 关系 为 切入 点 ， 
者 系 统 性 .科学 人 性、 典型 性 等 原则 ,以 合作 强度 ,方向 
配 度 和 评审 业绩 为 主要 指标 , 围绕 科研 项 目 评审 中 
的 治 家 回避 问题 展开 量化 研究 ,下 面 将 依次 对 各 指标 
远 衙 详细 困 释 ,并 汇总 如 表 ! 所 示 : 
QO 表 1 专家 回避 指标 


CY 级 指标 二 级 指标 三 级 指标 性 质 
< 作弄 度 合作 频次 效益 型 指标 
四 时 间 差 - 成 本 型 指标 
和 om = 成 本 型 指标 
FE 本 度 > = 成 本 型 指标 
= 评审 业绩 评审 信誉 - 成 本 型 指标 
ps 评审 质量 一 致 度 成 本 型 指标 
偏离 度 效益 型 指标 


3.2.1 合作 强度 

合作 强度 反映 的 是 专家 与 申请 人 之 间 论 文 合作 关 
系 的 强 弱 程度 ,而 不 是 专家 自身 的 合作 能 力 水 平 。 这 
方面 的 研究 主要 集中 于 区 域 合作 强度 、 产 学 研 合 作 强 
度 等 方面 ,关于 学 者 之 间 的 合作 强度 量化 研究 较为 稀 
缺 ,更 多 的 则 是 倾向 于 研究 潜在 合作 关系 、 合 作 网 络 可 
视 化 等 内 容 ,进而 衡量 以 及 预测 学 者 的 合作 能 力 。 基 
于 此 现状 ,笔者 试图 以 合作 频次 和 时 间 差 两 个 因素 来 
衡量 合作 强度 。 

(1) 合 作 频 次 5S,,。 合 作 频 次 是 指 专家 与 申请 人 合 
作 的 论文 篇 数 ,考虑 到 合作 频次 的 数值 一 般 较 大 ,为 方 
便 后 续 数据 处 理 和 避免 产生 自然 权重 问题 ,这 里 借鉴 
G，Salton 曾 提出 的 用 于 计量 两 者 之 间 合 作 情 况 的 方 
法 , 即 Salton 指数 ” ,对 合作 频次 进行 归 一 化 处 理 , 具 


体 计算 公式 如 下 
S 三 Cam pA 1 
~- MV eu XP。 Sm 


式 (1) 中 ,a 为 专家 与 申请 人 之 间 的 合作 论文 篇 
数 ,e, 是 指 专 家 的 所 有 合作 论文 数 ,p, 是 指 申请 人 的 所 
有 合作 论文 数 ,一 般 来 说 ,专家 与 申请 人 之 间 的 Salton 
指数 越 高 ,说 明 二 者 之 间 的 合作 越 频繁 。 

(2) 时 间 差 AT。 时 间 差 是 指 专 家 与 申请 人 的 最 近 
一 次 合作 论文 出 版 年 与 当前 年 份 的 差 值 。 目 前 ,关于 
时 间 差 对 合作 关系 密切 程度 影响 的 研究 很 少 ,但 这 并 
不 意味 着 时 间 差 对 于 合作 关系 没有 影响 , 故 笔者 假设 : 
二 者 之 间 的 合作 时 间 差 对 合作 关系 密切 程度 有 负 向 影 
响 , 即 时 间 差 的 数值 越 大 ,专家 与 申请 人 之 间 的 合作 强 
度 反 而 越 小 。 

3.2.2 合作 作者 深度 

目前 , 越 来 越 多 的 学 者 选择 与 他 人 合作 来 展开 科 
学 研究 , 随 着 合作 者 的 增加 ,学 者 与 每 位 合作 者 之 间 的 
关系 强度 理论 上 会 降低 。 有 具体 来 讲 , 对 于 同一 项 研究 ， 
假设 学 者 A 有 两 种 合作 情况 :四 仅 和 了 合作 ;和 B.C 
合作 。 当 存在 问题 时 ,前 者 中 A 只 会 与 B 商讨 ,而 后 
者 中 A 还 可 以 联系 C, 即 一 定 程度 上 C 弱化 了 和 A 与 B 
之 间 的 合作 关系 。 此 外 ,陈云 伟 等 ”通过 分 析 专 家 的 
合作 结构 时 发 现 , 合 作 关系 可 能 还 需要 从 合作 者 来 源 
机 构 合作 论文 所 占 比例 .合作 作 者 深度 等 多 个 角度 进 
行 全 面 分 析 。 所 以 ,笔者 参考 其 研究 ,在 已 有 指标 的 基 
础 上 又 引入 合作 作者 深度 这 一 指标 , 它 是 指 论文 的 篇 
均 合 作 作者 数 , 合 作 作 者 深度 的 值 越 小 ,专家 与 申请 者 
之 间 的 合作 关系 越 紧 密 。 

3.2.3 评审 业绩 

如 果 专 家 与 申请 人 之 间 曾 有 过 合作 ,那么 这 只 能 
说 明 相 对 于 其 他 申请 者 而 言 ,专家 对 该 申请 者 更 为 熟 
悉 ,但 熟悉 不 意味 着 会 徇私 ,还 需要 观察 专家 的 道德 品 
质 .评审 经 历 等 ,不 过 这 方面 的 资料 一 般 由 科技 管理 部 
门 保管 ,通常 情况 下 无 法 获取 ,这 也 是 笔者 提出 的 模型 
仅 面 向 科研 管理 部 门 的 原因 。 下 面 将 从 评审 信誉 和 评 
审 质量 两 个 方面 对 专家 的 评审 业绩 进行 计量 : 

(1) 评 审 信誉 R.。 评 审 信誉 可 以 通过 了 解 管理 部 
门 对 专家 的 信用 记录 情况 来 掌握 ,具体 来 讲 , 如 果 管 理 
部 门 的 资料 记录 的 是 专家 的 不 良 行为 次 数 ,那么 我 们 
首先 需要 对 待 选 专家 的 不 良 行 为 情况 进行 统计 ,分 析 
出 大 致 的 分 布 情况 ,然后 据 此 将 专家 信誉 划分 为 优秀 、 
良好 、 合 格 和 不 合格 4 个 等 级 ,对 应 分 数 为 0.5.0.3、 
0.1.0; 如 果 资 料 中 已 经 评 好 等 级 ,那么 直接 按 规定 打 
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分 即 可 。 

(2) 评 审 质量 。 评 审 质量 可 以 反映 专家 的 工作 水 
平和 工作 态度 ,这 里 参考 贺 晓 宇 ” 提出 的 评审 专家 信 
用 评价 指标 体系 ,选取 一 致 度 和 偏离 度 作 为 评审 质量 
的 计算 指标 。 其 中 ,一 致 度 是 指 专 家 对 申请 项 目的 评 
议 结果 与 最 终 评议 结果 的 一 致 性 程度 的 大 小 ,对 评审 
质量 存在 正 癌 影响 ;偏离 度 包括 横向 偏离 度 和 纵向 偏 
离 度 , 即 同 一 项 目 中 专家 的 评审 结果 与 其 他 专家 结果 
的 差异 以 及 与 专家 历次 评审 结果 相 比 的 浮动 程度 ,对 
评审 质量 存在 负 向 影响 。 需 要 说 明 的 是 ,项 目 评审 结 
果 一 般 是 A、B、C3 个 级 别 ,为 了 便于 量化 ,将 它们 蔡 换 
为 5 3 1。 具体 计算 公式 如 下 : 


一 致 度 41= 广 
m 


公式 (2) 


[ i (x —x,)” + De (x —x;)” ] 


eR 公式 (3) 
电 式 (2) 中 ,p 表示 专家 推荐 的 项 目 与 专家 组 推荐 的 
项 目 致 的 项 目 数 ,m 表示 专家 i 的 评审 项 目 数 ; 式 
(DP ,x ;表示 第 i 位 专家 对 第 j 个 项 目的 评审 结果 ,x， 
十 位 专家 参与 评审 吉 果 的 平均 值 ,x; 表示 第 j 个 
项 让 所 有 专家 的 评审 结果 平均 值 。 
Gh 方向 匹配 度 

三 笔者 试图 采用 方向 匹配 度 对 专家 研究 方向 进行 度 
晤 玫 据 此 判断 专家 是 大 同行 还 是 小 同行 乃至 是 外 行 。 
它 鲁 李江 等 | 中 学 者 在 探讨 专家 推荐 模型 时 所 提出 的 
“和 史 合 度 "指标 简化 而 来 ,是 指 专家 的 研究 方向 与 
评 壳 项 目 主题 间 的 匹配 度 。 专 家 的 研究 方向 主要 通过 
个 人 主页 介绍 和 近期 发 表 论 文 的 关键 词 词 频 等 进行 了 
解 ,评审 项 目的 主题 可 以 从 项 目 申报 书 的 关键 词 以 及 
官方 文件 简介 中 获悉 ,然后 将 专家 科研 成 果 的 关键 词 
与 项 目 关 键 词 进行 比 对 ,统计 出 各 关键 词 对 应 的 匹配 
次 数 n,。 由 于 研究 发 表 存 在 一 定 的 时 间 灌 后 性 ,在 这 
段 时 间 里 专家 可 能 会 有 新 的 研究 方向 ,所 以 在 计算 时 
应 考虑 滞后 性 对 方向 匹配 度 的 负 向 影响 ,具体 计算 公 
式 如 下 : 


M= 21 (ti Xn,) 公式 (4) 
式 (4) 中 ,a 是 科研 项 目的 关键 词 数 ,i 是 第 下 个 
匹配 关键 词 的 时 间 灌 后 性 指标 ,t =e“”, At 为 匹配 关 
键 词 最 近 一 次 出 现 的 年 份 与 当前 年 份 的 差 值 , 设 定 M 
大 于 1 为 小 同行 专家 ,M e (0,1) 为 大 同行 专家 。 
3.3 权重 设置 
目前 ,权重 的 确定 方法 大 致 可 以 分 为 主观 赋 权 法 


和 客观 赋 权 法 ,主观 赋 权 法 可 以 更 好 地 反映 评价 指标 
的 真实 情况 ,但 存在 人 为 干扰 ;客观 赋 权 法 以 数据 为 基 
础 ,讲究 科学 ,但 忽略 了 指标 的 内 在 联系 ,会 因 样本 量 
的 变化 而 变化 。 这 两 种 方法 都 存在 信息 损失 问题 ,并 
且 客 观 赋 权 的 稳定 性 和 可 继承 性 比 主观 赋 权 差 , 可 和 解 
释 性 也 弱 于 主观 赋 权 ,因此 笔者 选用 专家 评价 法 和 闹 
权 法 ,借助 欧式 距离 函数 对 各 项 指标 进行 组 合 赋 权 。 
3.3.1 专家 评价 法 

邀请 具备 评审 经 历 的 老师 .拥有 科研 项 目 申请 经 
历 的 学 者 以 及 熟悉 该 方法 的 研究 人 员 组 成 评分 小 组 ， 
对 各 指标 的 重要 性 进行 打分 ,分 值 范围 为 (0,1) 。 每 个 
§ 标 最 终 的 主观 权重 计算 公式 如 下 : 

= Zt, 公式 (5) 

式 (5) 中 ,是 指 对 j 指标 进行 评分 的 人 数 ,C; 是 
指 小 组 成 员 1 对 j 指标 的 评分 。 
3.3.2 炳 权 法 

根据 表 1 中 的 指标 性 质 
处 理 ,具体 步骤 如 下 ， 

数据 标准 化 处 理 , 处 理 公式 如 下 所 示 : 


效益 型 指标 j 的 处 理 公式 :7; J 


,对 相关 数据 进行 标准 化 


成 本 型 指标 j 的 处 理 公式 :7; 一 公式 (6) 


式 (6) 中 ,x 表 示 第 1 Ri | i b 
是 指 第 j 个 指标 的 量 值 中 的 最 小 值 ,xj,,, 是 指 第 j 个 指 
a er ei 


待 选 专 家 的 数量 ,n 是 指标 的 个 数 。 
计算 闹 值 6, 计 算 公式 如 下 所 示 : 
6= -i Zpy* lip 公式 (7) 
0 公式 (8) 
计算 客观 权重 wj, 计算 公式 如 下 所 示 : 
1— e, 
ee 
we [0,1], 5", w=1 公式 (9) 
3.3.3 综合 权重 WwW; 
贺 晓 宇 "* 认 为 ,通过 利用 欧式 距离 函数 ,可 以 计 


算出 主 、 客 观 权重 的 偏好 系数 ,进而 获得 各 指标 的 综合 
权重 ,如 此 便 能 综合 主 、 客 观 赋 权 法 的 计量 优势 ,使 权 
重 值 更 加 客观 合理 地 体现 指标 在 体系 中 的 重要 程度 。 
具体 步骤 如 下 : 

计算 主 、 客 观 权重 的 偏好 系数 a、B, 计 算 公 式 如 下 
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所 示 : 


D(Qs0) = BQ -ww) 
DD wy et 
a+B=1 
计算 综合 权重 WW, 计 算 公式 如 下 所 示 : 
W, = aQ; + Bw; 

3.4 ”专家 回避 模型 算法 
笔者 试图 采用 修正 后 的 TOPSIS 法 作为 确定 回避 
专家 名 单 的 模型 算法 , 它 通过 将 负 理想 解 国定 为 原点 
以 及 数据 标准 化 后 极 小 值 为 极 大 值 一 半 的 方法 ,有 效 
地 解决 了 传统 TOPSIS 法 存在 的 逆序 问题 和 自 相 蔬 盾 
问题 ,实现 了 算法 的 优化 。 之 所 以 选用 该 算法 , 主 
要 是 因为 本 文 的 最 初 目的 就 是 找到 一 个 参照 点 ,计算 
它 汝 专家 的 回避 值 的 相对 距离 ,距离 越 小 ,专家 就 越 应 


公式 (10) 


公式 (11) 


专家 组 的 性 别 分 布 . 年 龄 以 及 所 属 机 构 等 都 有 一 定 限 
制 ,所 以 在 排序 结果 的 基础 上 还 应 考虑 这 些 因素 ,使 专 
家 组 的 成 员 结 构 更 加 趋 于 合理 。 


4 ”算法 检验 


4.1 模型 测试 

首先 ,以 国家 基金 委 管 理科 学 部 公布 的 重大 项 目 
评审 专家 名 单 为 依据 ,任意 抽取 19 名 专家 作为 待 选 专 
家 样本 集 。 然 后 ,鉴于 研究 基于 论文 合作 关系 ,所 以 先 
收集 了 每 位 专家 在 2010 -2020 年 间 的 合作 作者 ,将 这 
些 作 者 放 入 Excel 的 随机 抽取 器 ,如 果 抽 取 结 果 为 外 国 
人 名 或 者 不 符合 国家 基金 委 的 申报 者 要 求 , 则 重新 抽 
取 ,最 终 随机 生成 15 名 潜在 申请 人 (这 是 构建 测试 样 
本 集 的 操作 ,科研 管理 机 构 实际 使 用 时 无 需 依 此 获得 


谈 国 各, 进而 找到 相对 而 言 更 应 该 回避 的 专家 ,而 
TQRESIS 法 的 基本 原理 恰好 与 之 契合 。 具 体 的 算法 步 
DF : 


一 (1) 对 原始 数据 进行 标准 化 处 理 , 构 建 指标 矩阵 
,处 理 公式 如 下 所 示 : 


效益 型 指标 的 处 理 公式 :2Z; =0.5 x 


六 一 和 ji 
+0.5 
Ws 


jmin 
NX, 一 多 ， 
imax 一 和 
+0.5 
一 多 
i 


ma jmin 


% 


公式 (12) 
6G(2 ) 构建 加 权 决策 矩阵 ( 芒 )。w，, 计 算 公式 如 下 所 
1 


〇 G3 ) 确 定 正 负 理想 解 Y 六 
(4) 利 用 欧式 距离 函数 计算 各 指标 与 理想 解 之 间 
的 距离 4 .4 - ,计算 公式 如 下 所 示 : 
d = VE(Y,-0) 公式 (14) 
(5) 计 算 相 对 贴 进度 K ,计算 公式 如 下 所 示 : 


了 - 
EIR 和 

Nt 公式 (15) 

式 (15 ) 中 ,K; 表示 专家 i 的 回避 情况 与 回避 参照 


点 即 绝对 理想 解 之 间 的 贴近 度 ,从 理论 上 讲 ,K; 越 大 ， 
说 明 专家 i 越 应 该 回避 。 

上 述 流程 结束 后 ,需要 对 各 专家 的 K; 进行 倒序 排 
列 , 以 清楚 地 反映 出 他 们 的 理论 回避 值 ,再 以 官方 给 定 
的 专家 组 成 员 数 量 作为 约束 条 件 , 就 可 以 获得 理论 上 
应 该 回避 的 专家 名 单 。 但 是 ,考虑 到 科研 管理 部 门 对 


1 请 人 ) 。 接 着 ,分别 从 中 国 知 网 和 Web of Science 数 
据 库 汇总 专家 和 申请 人 在 2010 - 2020 年 间 各 自 的 发 
文 情 况 ,包括 论文 数量 发文 时 间 .关键 词 等 ,观察 专 
家 与 申请 人 之 间 的 论文 合作 情况 ,发 现 有 4 名 专家 与 
1 请 人 之 间 不 存在 论文 合作 。 为 简化 分 析 过 程 , 暂 
将 其 视 为 评审 专家 ,不 过 在 实际 使 用 时 还 需要 进 一 
步 考虑 其 社会 关系 .其 他 合作 形式 等 因素 。 最 后 ,从 
剩余 的 15 名 待 选 专家 和 申请 人 之 间 的 论文 合作 关系 
切入 ,说 明 上 述 模 型 在 探讨 专家 的 回避 情况 时 的 应 
用 步骤 。 
(1) 根 据 3.3 节 模 型 指标 量化 方法 对 已 有 的 专家 
和 申请 人 的 数据 进行 计算 ,得 出 初始 的 指标 值 ( 见 表 
2) 。 需 要 说 明 的 是 ,笔者 采用 随机 赋值 的 方式 获得 
部 分 相对 不 可 得 的 数据 ,以 偏离 度 为 例 :专家 在 给 出 
评审 结果 时 一 般 是 以 A,B,C 形式 呈现 ,为 了 便于 计 
算 ,将 它们 替换 为 5,3,1, 然 后 就 每 位 专家 ,用 数组 
[5 ,3,1] 对 其 进行 5 次 随机 赋值 ,再 根据 计算 公式 处 
理 随 机 数据 ,进而 得 到 测试 模型 所 需 的 偏离 度 。 虽 
然 这 样 可 能 会 使 测试 过 程 出 现 偏差 ,但 是 科研 管理 
机 构 在 使 用 时 ,因为 他 们 能 够 获取 这 些 数据 ,那么 出 
现 偏差 的 概率 会 大 大 降低 ,所 以 这 一 问题 并 不 会 影 
响 模型 的 实际 使 用 。 

(2) 专 家 评价 法 计算 主观 权重 。 测 试 邀 请 了 10 位 
专家 对 各 指标 进行 独立 打分 ,经 过 多 轮 反 馈 修改 后 , 根 
据 公 式 (5 ) 确定 指标 的 主观 权重 @ = (0. 242 ,0. 140 ， 
0. 138 ,0. 143 ,0.087 ,0. 1$3 ,0. 102 ) ; 

(3 ) 炉 权 法 计算 客观 权重 。 先 利用 公式 (6) 对 各 
标的 初始 值 进行 标准 化 处 理 ,然后 根据 公式 (7) - 
(9) 计 算 各 指标 的 客观 权重 , 见 表 3。 


129 


团 定 情报 三 作 


第 65 卷 第 18 期 2021 年 9 月 


ChinaXiv 合 作 期 刊 


So AT DD R, A; Bi M 
el 0.0325 9 4.0 0.40 0.80 228 12.5780 
e2 0.0572 7 43 0.50 080 2.35 1.8950 
e3 0.0187 4 3.0 050 100 1.16 1.0020 
ea 0.1371 6 2.9 0.30 1.00 2.06 9.3420 
es 0.2132 2 2.8 0.40 085 3.40 3.7550 
e6 0.0392 0 3.0 030 090 3.18 0.0004 
e7 0.0808 6 3.0 0.50 100 206 2.2110 
es 0.253 9 1 3.8 0.30 0.80 0.68 8.6790 
eo 0.1684 6 3.6 0.35 0.80 3.42 0.0030 
el0 0.1647 2 3.4 0.35 0.90 4.20 13.1400 
ell 0.0787 9 3.0 050 085 244 7.7640 
el2 0.1378 2 2.7 040 090 414 8.0000 
e13 0.0462 2 43 0.50 1.00 5.75 0.0280 
Nm 0.2025 1 3.1 0.32 0.80 4.25 1.9960 
亏 0.4219 1 3.3 0.50 0.75 3.88 11.3340 
, 0.4219 9 43 0.50 1.00 575 13.1400 
sn) 0.0187 0 2.7 0.30 0.75 0.68 0.0004 
= 表 3， 灶 权 法 下 各 指标 的 客观 权重 
级 指标 二 级 指标 三 级 指标 入 值 e 权重 ww; 
(CBRNE 强度 。 合作 频次 = 0.860 0.237 
CD 寺 间 差 可 0.956 0.075 
者 深度 一 一 0.995 0.008 
Gx 和 业绩 评审 信誉 三 0.869 0.222 
~ 评审 质量 一 致 度 0.869 0.222 
日 离 度 0.949 0.086 
匹配 度 生 一 0.912 0. 149 


祷 (4) 现 已 求 得 各 项 指标 的 主观 权重 和 客观 权重 ， 
将 时 代入 公式 (10) 计 算 主 、 客 观 权重 的 偏好 系数 ,得 
到 如 =0.614.B =0.386, 然 后 根据 公式 (11 ) 就 能 获得 
各 指标 的 综合 权重 ,具体 见 表 4: 

表 4 ”专家 回避 指标 权重 汇总 


~ 


—~ 


一 级 指标 二 级 指标 ”三 级 指标 ”主观 权重 ”客观 权重 ”综合 权重 
合作 强度 合作 频次 一 0.242 0.237 0.240 
时 间 差 一 0. 140 0.075 0.115 
合作 作者 深度 一 一 0.138 0. 008 0.088 
评审 业绩 评审 信誉 一 0. 143 0.222 0. 174 
评审 质量 ” 一致 度 0.087 0.222 0. 139 
偏离 度 0. 153 0.086 0. 127 
方向 匹配 度 四 一 0. 102 0.149 0. 120 


观察 表 4 可 以 发 现 ,如 果 对 指标 的 各 类 权重 按 降 
序 排 序 , 某 些 指标 的 主 、 客 观 权 重 会 出 现 不 一 致 ,尤其 
是 一 致 度 和 偶 离 度 ,这 或 许 是 因为 它们 的 客观 权重 是 
依据 赋值 数据 而 非 实际 数据 计算 得 到 的 。 此 外 ,对 于 
一 些 权 重 排序 结果 差异 较 小 的 指标 ,如 时 间 差 、 合 作 作 


者 深度 等 , 待 后 期 研究 采用 更 多 的 样本 数据 ,差异 可 以 
得 到 进一步 减 小 。 

(5) 依 据 3.5 节 所 给 出 的 修正 TOPSIS 法 ,对 已 有 
的 标准 化 指标 进行 修正 ,构建 最 终 的 标准 化 矩阵 ,在 此 
基础 上 结合 综合 权重 得 到 加 权 决 策 矩 阵 ; 然 后 根据 公 
式 (14) 和 公式 (15 ) 分 别 计算 出 待 选 专家 到 正 负 理想 
解 的 欧 氏 距离 和 相对 贴 进度 ,其 中 ,相对 贴 进 度 就 是 笔 
者 设计 的 模型 给 出 的 理论 回避 值 ;最 后 将 各 位 专家 对 
应 的 理论 回避 值 进行 排序 ,理论 回避 值 越 大 意味 着 该 
专家 越 应 该 回避 ,具体 结果 如 表 5 所 示 : 

表 5 基于 修正 TOPSIS 的 专家 回避 模型 理论 排序 结果 


二 di 理论 回避 值 排序 
el 2.407 1 0.255 0 0.095 8 12 
e2 入 3999 0.258 7 0.097 3 | 
e3 2.407 9 0.243 5 0.091 9 15 
e4 3 0.290 5 0. 108 9 9 
65 2.340 7 从 315 2 0. 118 7 4 
e6 2.341 9 0.3140 0.1182 6 
e7 2.4029 0.2506 0.0944 14 
eg 2.347 1 0.328 1 0. 122 6 a 
eg 2.345 3 0.315 8 0.1187 4 
e10 2. 363 6 2093 W123 7 
ell 2.4034 .23511 0.0946 13 
e12 2.3579 0.295 4 W1113 8 
e13 2.3908 0.267 8 0. 100 7 10 
e14 2.318 5 0.339 5 0 1277 1 
el5 2.341 1 0.341 7 0.1274 2 


假设 官方 给 定 的 评审 专家 组 成 员 数 为 11 名 , 现 已 
有 4 名 ,那么 根据 表 5 排序 结果 ,理论 上 应 该 回避 的 专 
家 为 el4，eg，E6，eoel5 9€5 Cl2 El0o 
4.2 结果 分 析 

由 上 文 可 知 ,该 项 目的 评审 专家 组 成 员 为 6, ,e;， 
e3,e7,e1 ,64,613, 以 及 与 申请 者 不 存在 论文 合作 关系 的 
4 位, 下面 对 专家 组 情况 进行 分 析 检 验 。 

就 评审 专家 组 的 基本 情况 而 言 ,首先 根据 科技 管 
理 部 门 对 于 专家 组 成 员 构 成 的 一 些 要 求 ,比如 一 定 比 
例 的 青年 女性 科学 技术 人 员 ;同一 法 人 单位 成 员 限 1 
名 等 ,针对 专家 组 成 员 的 年 龄 .所 属 机 构 等 属性 特征 进 
行 分 析 。 具 体 地 ,通过 浏览 评审 专家 组 成 员 的 个 人 主 
页 ,观察 他 们 的 年 龄 .性别 .所 属 机 构 、 参 评 项 目 年 份 
等 ,发 现 专家 组 成 员 年 龄 均值 为 53 岁 , 大 多 来 自 不 同 
的 研究 机 构 和 高 校 ,连续 参评 年 份 均 不 超过 两 年 ,包含 
3 名 女性 专家 和 3 名 青年 科研 人 员 ,符合 官方 要 求 。 
然后 观察 他 们 的 方向 匹配 度 ,发 现 大 同行 专家 1 名 ,小 
同行 专家 6 名 ;对 于 无 合作 的 4 位 专家 ,观察 其 主页 上 
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的 研究 领域 ,发 现 领域 与 项 目 主题 契合 者 1 名 。 因 此 ， 
小 同行 专家 共 7 名 , 占 比 63.6% ,避免 了 因 大 同行 占 比 
过 高 而 产生 的 评审 结果 南 辕 北 改 的 问题 。 由 此 可 见 ， 
利用 笔者 提出 的 模型 计算 获得 的 专家 组 成 员 构成 还 是 
较为 合理 的 。 

在 明确 专家 组 成 员 构成 性 质 后 ,进一步 对 回避 专 
家 和 评审 专家 进行 比较 分 析 。 结 果 显示 :ev 的 基本 情 
况 与 6;.es 相似 ,并 且 研 究 方向 更 契合 ,但 因为 偏离 度 
过 高 被 要 求 回避 ,由 此 可 见 模型 中 类 似 合作 程度 的 专 
家 未 必 全 部 要 回避 。e 和 es.e; 和 eu 这 两 对 的 情况 很 
相似 , 即 每 对 专家 的 方向 匹配 度 差不多 , 且 后 者 的 合作 
程度 均 高 于 前 者 , 单 从 项 目 熟悉 度 而 言 ,后 者 相对 更 合 
适 ,但 综合 考虑 其 评审 业绩 ,后 者 的 个 人 信誉 和 评审 质 
量 错 显 进 色 , 故 将 后 者 列 人 回避 名 单 。 此 外 ,从 模型 给 
出 的 回避 和 名单 来 看 ,尽管 多 数 回避 专家 的 合作 强度 较 
名 但 也 存在 诸如 ee .es 等 与 申请 人 合作 不 密切 的 专 
二 内 为 其 他 原因 被 要 求 回避 ,说明 本 模型 中 的 回避 流 
稳 现 确 没 有 “ 唯 合作 论 ”。 
一 最 后 ,对 结果 中 一 些 看 似 不 合理 的 情况 进行 解释 。 
cecay,es 是 15 名 专家 中 与 申请 人 合作 关系 最 为 密切 的 
3 (入 方向 匹配 度 也 比较 高 ,说 明 非 常熟 悉 项 目 研究 领 
域 , 数 理 来 说 应 该 保留 。 但 是 <; 和 。 的 信誉 较 低 ,es 
稳 &h 的 评审 结果 偏离 度 偏 大 ,存在 人 际 关 系 干扰 评审 
的 极 向 ,所 以 本 模型 将 其 定 为 回避 专家 。ee 的 方向 匹 
配 度 几 乎 为 0, 但 是 刚 与 申请 人 产生 合作 ,这 个 现象 似 
乎 eB 太 合 理 。 笔 者 认为 可 能 是 该 专家 从 事项 目 相关 领 
域 丁 研 究 比较 早 ,而 目前 在 突破 新 方向 ,所 以 可 能 是 考 
虑 到 其 对 项 目 研究 主题 的 发 展 趋 势 . 当 前 热点 等 把 所 
不 够 精准 而 将 其 回避 。 综 上 ,笔者 提出 的 模型 在 确定 
回避 专家 时 ,具有 充分 合理 的 回避 理由 ,专家 组 成 员 构 
成 符合 实际 需求 ,能 够 办 助 科技 管理 部 门 进行 专家 六 、 
选 决 策 。 


5 结语 
专家 回避 一 直 以 来 都 是 科研 管理 部 门 专家 遵 选 工 


作 的 一 个 重要 环节 ,也 是 同行 评议 研究 领域 的 一 个 热 
点 话题 ,有 利于 保障 科研 评价 的 程序 正义 和 科研 人 员 
的 创新 热情 ,营造 出 良性 的 学 术 氛 围 。 笔 者 从 评审 专 
家 与 申请 人 之 间 的 论文 合作 关系 出 发 ,剖析 其 对 专家 
回避 情形 的 影响 ,利用 合作 强度 .合作 作者 深度 ,方向 
匹配 度 和 评审 业绩 等 指标 ,衡量 待 选 专家 的 人 际 关系 、 
专业 能 力 和 个 人 修养 ,再 采用 综合 权重 和 修正 TOPSIS 
法 对 各 项 指标 进行 分 析 量 化 ,顺利 搭建 了 一 个 简单 的 
专家 回避 模型 ,并 给 出 了 初步 的 回避 专家 名 单 来 辅助 


工作 人 员 进 行 专家 效 选 工作 ,从 而 减少 科研 管理 部 门 
的 工作 负担 ,为 实现 专家 回避 操作 的 自动 化 提供 参考 。 

与 有 关 科 研 项 目 专家 回避 问题 的 现 有 模型 相 比 ， 
笔者 所 提出 的 模型 有 以 下 几 处 优势 : 

(1) 指标 选取 更 全 面 。 分 别 从 专家 的 合作 情况 、 
专业 水 平和 个 人 修养 设置 指标 ,综合 衡量 专家 与 科研 
评审 项 目的 适 配 性 ,而 不 是 仅 着 眼 于 专家 的 社会 属性 ， 
根据 是 否 有 关系 或 者 关系 强度 来 游 选 专 家 。 

(2) 量 化 方法 更 科学 。 基 于 主观 权重 和 客观 权重 
确定 各 项 回避 指标 的 重要 性 ,在 一 定 程度 上 可 以 降低 
回避 值 的 误差 。 男 外 ,使 用 TOPSIS 综合 评价 法 作为 模 
型 的 基础 算法 ,该 方法 适用 于 样本 数据 的 内 部 排序 ,在 
常用 评价 算法 中 最 容易 实现 , 相 比 于 新 设计 的 算法 也 
更 为 成 熟 可 靠 。 

(3 ) 操 作 流 程 更 具体 。 不 再 停留 于 回避 问题 中 专 
家 各 类 关系 的 抽取 途径 .概念 模型 的 架构 ,明确 地 阐述 
合作 关系 的 量化 方式 和 回避 模型 的 使 用 流程 ,并 试图 
利用 测试 样本 集 对 模型 效果 进行 检验 。 

(4) 适 用 对 象 更 明确 。 面 向 科研 管理 机 构 设 计 ， 
适用 于 科研 项 目 评审 场合 ,专注 于 探讨 在 专家 与 申请 
人 存在 论文 合作 关系 时 ,如 何 合理 地 确定 回避 专家 。 

当然 ,本 文 研究 也 有 不 足 之 处 ,比如 由 于 评审 业 
绩 、. 申 请 人 等 数据 不 可 得 ,就 利用 随机 赋值 /抽取 获取 ， 
这 样 得 到 的 结果 与 利用 一 手数 据 得 到 的 相 比 ,存在 一 
定 偏 差 , 但 这 个 问题 是 相对 的 ,因为 对 于 科研 管理 机 构 
的 内 部 人 员 而 言 ,能 够 较为 容易 地 获得 上 述 数 据 , 所 以 
理论 上 并 不 会 影响 模型 的 使 用 。 此 外 ,目前 本 文 的 研 
究 只 是 基于 评审 专家 的 论文 合作 数据 ,未 来 研究 将 会 
考虑 项 目 合 作 、 图 书 合 著 等 其 他 合作 形式 ,同时 进一步 
扩大 样本 数据 量 ;研究 场景 将 不 再 拘泥 于 科研 项 目 评 
,会 向 更 广阔 的 空间 进行 延伸 ,为 研究 出 具备 场景 普 
适 性 的 回避 模型 英 定 基础 。 
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Research on Expert Avoidance Model of Scientific Research 
Projects Based on Paper Cooperation Relationship 
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© Absiract: | Purpose/ significance | Aiming at the avoidance problem in the selection of peer review experts for 


scientific research projects, this paper tries to put forward a set of feasible model methods to determine the avoidance 
experts, so as to avoid the interference of interpersonal relationship on the evaluation work and ensure the standardi- 
zation and fairness of scientific research evaluation. | Method/ process | Firstly, the paper cooperation relationship 
between experts and applicants was taken as the entry point, and the cooperation intensity, the depth of co-authors, 
the direction matching degree and the review performance were taken as the main indicators. Then, the comprehen- 
sive weight and modified TOPSIS were used to analyze each index, and the quantitative model of expert avoidance for 
scientific research projects was constructed. Finally, according to the specified number of members of the expert 
2roup, considering the distribution of age, institution, gender, etc. , the experts that should be avoided were identi- 
fied. | Result/conclusion | Through case analysis, it is found that this model effectively avoids the problem of “only 
cooperation theory” when giving the list of experts to avoid, and has sufficient reasons to avoid, which meets the re- 
quirements of expert selection of the Ministry of Science and Technology Management and can provide certain decision 
support for expert selection. 

modified TOPSIS scientific research pro- 
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